How Many Test Users in a Usability Study?可用性測試的最佳使用者人數
在定性可用性測試中,測試 5 名使用者幾乎可以發現大部分的可用性問題,達到高效的成本收益比。然而,某些場景可能需要更少或更多使用者。
為什麼選擇 5 個使用者?
高效的發現率: 5 名使用者即可揭示絕大多數的可用性問題,更多的使用者帶來的新增問題發現會迅速遞減。
成本收益比最優: 隨著測試使用者數量增加,成本上升,但收益增加趨於平緩。因此,小規模測試是最佳選擇。
適用範圍:
不論是網站、企業內網、PC 應用程式還是移動應用,5 人測試原則普遍適用。
規則的例外情況
1. 定量研究
目標: 獲取統計顯著性結果。
建議使用者數: 至少 20 人,置信區間要求嚴格時需更多。
2. 卡片分類測試
目標: 設計或驗證資訊架構。
建議使用者數: 每個使用者組至少 15 人。
3. 眼動追蹤
目標: 生成穩定的熱圖。
建議使用者數: 39 人。
結論:儘管某些場景需要更大樣本,但絕大多數研究應該以定性研究為主,專注於洞察而非統計資料。
ROI:為什麼更多使用者不總是更好?
- 成本上升: 隨著測試使用者增加,每增加一名參與者都顯著提高成本(包括招募、測試時間等)。
- 回報遞減: 超過 5 名使用者後,發現的問題數量增長微乎其微。
如果有額外預算,優先選擇多輪小規模測試,而非增加每輪測試的使用者數。
關於增加使用者數的常見誤解
誤解 1:網站使用者眾多,樣本應該大
事實: 樣本量的統計方差只與樣本數量相關,與總體規模無關。
誤解 2:功能繁多,需要測試更多使用者
事實: 多功能的網站應分解為多個小型測試,每次測試只關注一部分功能。
誤解 3:不同目標群體需要更多使用者
事實: 不同目標群體的確可能需要更多使用者,但每組目標使用者通常只需測試 3–5 人即可揭示主要問題。
誤解 4:高價值專案需要消除所有問題
事實: 高預算專案可以支援更多迭代,而不是透過一次大規模測試解決所有問題。迭代設計流程的多輪測試最終能實現更高質量和 ROI。
推薦使用者數的實際應用
1. 絕大多數場景:5 人測試
優點: 快速揭示大部分問題,成本低,效率高。
適用範圍: 定性研究和功能性驗證。
2. 特殊場景:更多使用者
多目標群體: 針對醫生和患者等完全不同的使用者組,每組 3–5 人。
高預算高價值專案: 如果業務收益巨大,可支援更多使用者以提升可信度。
3. 小型敏捷專案:2–3 人測試
適用範圍: 開發週期短、測試成本極低的敏捷設計流程。
優點: 多次小型測試累積更多長期收益。
案例資料:83 項使用者測試的研究結果
資料顯示:測試使用者數與發現問題數量的相關性很小。
原因:
- 部分客戶要求更多使用者以增加內部可信度。
- 針對多目標使用者的設計專案需要額外樣本。
- 高預算諮詢專案傾向於增加使用者人數。
“5 個使用者”是大多數測試的黃金標準:
- 能有效揭示大部分問題,最佳化成本收益比。
- 遵循迭代設計流程,多輪小規模測試累積更高價值。
例外情況:
- 統計性研究、資訊架構驗證、眼動追蹤等特殊場景需要更大樣本。
- 高預算專案和多目標使用者場景可能需要調整樣本數量。
透過靈活應用這些原則,設計團隊可以在有限資源下最大化使用者研究的價值。